an exploratory study of differential item functioning (dif) in efl reading comprehension

thesis
abstract

بررسی دلایل عملکرد متفاوت سوالات آزمون درک مطلب به زبان خارجی تاریخچه ی تحقیق درباره ی منابع عملکرد مختلف سوالات (دیف) در آزمون درک مطلب پر است از مجموعه ای از متغیرهای فرضیه ای که چند مورد از مهمترین آنها عبارتند از: جنسیت، آشنایی با موضوع متن، علاقه به موضوع یا محتوای متن، حدس زدن، و عوامل بافت اجتماعی (پی 2004؛ زومبو و گلین 2005). مطالعه حاضر با استناد به فلسفه ی انکارپذیری پوپر عوامل ذکر شده در بالا را مد نظر داشته و سعی بر آن داشته است تا بطور تجربی بررسی کند که آیا منابع فرض شده برای دیف در آزمون درک مطلب به زبان خارجی می توانند بر پایه ای قوی از فلسفه ی تایید/انکارپذیری استوار باشند؟ در این تحقیق عملکرد آزمون 203 ایرانی شامل 110 زن و 93 مرد بوسیله ی دو مدل آماری یعنی لوجیستیک ریگرشن (lr) و آیتم ریسپانس تئوری (irt) مورد بررسی قرار گرفت. به این منظور یک آزمون درک مطلب با 6 متن (2 متن با موضوع آشنا برای خانم ها، 2 متن با موضوع آشنا برای آقایان، و 2 متن با موضوع خنثی) طراحی شد و در انتهای هر متن 5 سوال از نوع مختلف که عبارت بودند از: سوال از نوع دانش، مرجع ضمیر یا اسم، لغت، مفهوم اصلی متن، و استنباط یا نتیجه منطقی گنجانده شد تا مشخص شود که آیا جنسیت می تواند تاثیر واقعی بر عملکرد سوالات بطور کلی و بخصوص بر نوع خاصی از سوال آزمون درک مطلب داشته باشد یا نه؟ علاوه بر این در انتهای هر متن یک پرسشنامه گنجانده شده بود که از آزمون شونده ها می پرسید که آیا سوالات را بر اساس شانس پاسخ داده اند، تا چه میزان موضوع متن برایشان آشنا بوده، و تا چه اندازه به موضوع متن علاقه داشته اند؟ همچنین از آزمون شونده ها خواسته شد تا اطلاعاتی درباره ی محل سکونتشان در شهر، درآمد ماهیانه خانواده، و میزان تحصیلات والدین را به محقق ارائه دهند تا میزان تاثیر عوامل بافت اجتماعی بر سوالات نیز مورد ارزیابی قرار گیرد. نتایج مطالعه ی حاضر نشان داد که برای عوامل جنسیت و آشنایی با موضوع متن تنها مدل lr توانست سوالات دیف را نشان دهد. سوالات دیف بر اساس عامل جنسیت فرضیه های موجود در تحقیقات قبلی را مورد تایید قرار داد اما دیف بر اساس آشنایی با موضوع متن عملکرد معکوسی نشان داد یعنی سوالات دیف کاملا به نفع کسانی بود که آشنایی اندکی با موضوع متن داشتند. منابع دیگر دیف توسط هر دو مدل آماری در سوالات دیف نشان داده شد. برای دیف بر اساس علاقه به موضوع متن نتایج پیجیده بود زیرا مدل lr یک آیتم به نفع گروه علاقه مند پیدا کرد در صورتی که مدل irt چند آیتم به نفع گروه علاقه مند و چند آیتم دیگر به نفع گروه غیر علاقه مند به موضوع متن را نشان داد. نتایج سوالات دیف یافته شده توسط دو مدل بر اساس حدس زدن و درآمد ماهیانه در تضاد کامل قرار داشت. مدل lr دیف را به نفع کسانی که کمتر حدس زده بودند و درآمد بالایی داشتند نشان داد در حالیکه مدل irt دیف را به نفع کسانی که حدس بالایی زده بودند و درآمد پایینی داشتند نشان می داد. با این وجود نتایج دیف یافته شده توسط دو مدل بر اساس محل سکونت و سطح تحصیلات والدین کاملا با یکدیگر مطابقت داشت زیرا هر دو مدل دیف را به نفع کسانی نشان دادند که در محله گران شهر زندگی می کردند و دارای والدین با سواد دانشگاهی بودند. نتایج مطالعه ی حاضر توانست با نمونه ی آماری کم تاثیر جنسیت، علاقه به موضوع متن، محل سکونت، و سطح تحصیلات را بر سوالات درک مطلب به زبان خارجی نشان دهد. اما تحقیقات تجربی بیشتری مورد نیاز است تا با نمونه ی آماری بزرگتر و در موقعیت های فرهنگی مختلف عملکرد متفاوت سوالات آزمون درک مطلب به زبان خارجی را بر اساس جنسیت، آشنایی با موضوع متن، و درآمد ماهیانه تایید کند.

First 15 pages

Signup for downloading 15 first pages

Already have an account?login

similar resources

A confirmatory study of Differential Item Functioning on EFL reading comprehension

The  present  study  aimed  at  investigating  DIF  sources  on  an  EFL  reading  comprehension test.  Accordingly,  2  DIF  detection  methods,  logistic  regression  (LR)  and  item  response theory  (IRT),  were  used  to  flag  emergent  DIF  of  203  (110  females  &  93  males)  Iranian EFL examinees’ performance on a reading comprehension test. Seven hypothetical DIF sources were examin...

full text

Differential Item Functioning (DIF) in Terms of Gender in the Reading Comprehension Subtest of a High-Stakes Test

Validation is an important enterprise especially when a test is a high stakes one. Demographic variables like gender and field of study can affect test results and interpretations. Differential Item Functioning (DIF) is a way to make sure that a test does not favor one group of test takers over the others. This study investigated DIF in terms of gender in the reading comprehension subtest (35 i...

full text

differential item functioning (dif) in terms of gender in the reading comprehension subtest of a high-stakes test

validation is an important enterprise especially when a test is a high stakes one. demographic variables like gender and field of study can affect test results and interpretations. differential item functioning (dif) is a way to make sure that a test does not favor one group of test takers over the others. this study investigated dif in terms of gender in the reading comprehension subtest (35 i...

full text

Selecting the Best Fit Model in Cognitive Diagnostic Assessment: Differential Item Functioning Detection in the Reading Comprehension of the PhD Nationwide Admission Test

This study was an attemptto provide detailed information of the strengths and weaknesses of test takers‟ real ability through cognitive diagnostic assessment, and to detect differential item functioning in each test item. The rationale for using CDA was that it estimates an item‟s discrimination power, whereas clas- sical test theory or item response theory depicts between rather within item mu...

full text

Using Multiple-Variable Matching to Identify EFL Ecological Sources of Differential Item Functioning

Context is a vague notion with numerous building blocks making language test scores inferences quite convoluted. This study has made use of a model of item responding that has striven to theorize the contextual infrastructure of differential item functioning (DIF) research and help specify the sources of DIF. Two steps were taken in this research: first, to identify DIF by gender grouping via l...

full text

My Resources

Save resource for easier access later

Save to my library Already added to my library

{@ msg_add @}


document type: thesis

وزارت علوم، تحقیقات و فناوری - دانشگاه شیراز - دانشکده علوم انسانی

Hosted on Doprax cloud platform doprax.com

copyright © 2015-2023